Skip to main content

Azkaban是在 LinkedIn 创建的批处理工作流作业调度程序

Azkaban是在 LinkedIn 创建的批处理工作流作业调度程序，用于运行 Hadoop 作业。Azkaban 通过作业依赖性解决排序问题，并提供易于使用的 Web 用户界面来维护和跟踪您的工作流程。

特征​

  • 兼容任何版本的 Hadoop

  • 易于使用的网络用户界面

  • 简单的 Web 和 http 工作流上传

  • 项目工作区

  • 工作流调度

  • 模块化和可插件化

  • 认证和授权

  • 跟踪用户操作

  • 关于失败和成功的电子邮件警报

  • SLA 警报和自动终止

  • 重试失败的作业

Azkaban 的设计主要考虑了可用性。它已经在 LinkedIn 运行了几年，并推动了他们的许多 Hadoop 和数据仓库流程。